宝库集锦:15个常用语料库+牛津大学珍稀典籍+英文电子书下载+中国经典小说100集
国内15个常用语料库汇总
--通用单语语料库--
01. 国家语委现代汉语通用平衡语料库
该语料库是由国家语言文字工作委员会主持,面向语言文字信息处理、语言文字规范和标准的制定、语言文字的学术研究、语文教育以及语言文字的社会应用,总体规模达1 亿字,语料时间跨度为1919-2002年,收录了人文与社会科学、自然科学及综合三个大类约40个小类的语料。其中标注语料库为国家语委现代汉语通用平衡语料库全库的子集,该子集是按照预先设计的选材原则进行平衡抽样,对语料进行分词和词类标注,并经过三次人工校对,最后得到约5000万字符的标注语料库。
http://www.aihanyu.org/cncorpus/index.aspx
02. 北京语言大学语料库中心BCC语料库
BCC语料库是以汉语为主,兼有英语、西班牙语、法语、德语、土耳其语等语言的语料库,其中汉语语料规模约150亿字,涵盖了报刊、文学、微博、科技、综合和古汉语等多领域语料。BCC语料库包括了生语料、分词语料、词性标注语料和句法树,目前已对现代汉语、英语、法语的语料进行词性标注。
http://bcc.blcu.edu.cn
03. 清华TH语料库
清华TH语料库于1994年6月建成,其总库根据对语料加工深度的不同采用分级管理的原则,分成了生语料和熟语料两大类,其中0级生语料分库涵盖了一般书、报纸、论文、杂志、工具书等五类子库语料素材。经过近年来不断的升级和更新,已更名为THCHS-30语料库。
http://www.openslr.org/18
04. 北京大学CCL语料库
CCL语料库中包含现代汉语语料、古代汉语语料两类单语语料,涉及的文献时间从公元前11世纪到当代。其中现代汉语语料约6 亿字符,涵盖了文学、戏剧、报刊、翻译作品、网络语料、应用文、电视电影、学术文献、史传、相声小品、口语等多个类型。CCL语料库中古代汉语语料约2亿字符,收录了从周代到民国的语料及大藏经、二十五史、历代笔记、十三经注疏、全唐诗、诸子百家、全元曲、全宋词、道藏、辞书、蒙学读物等的杂类语料。除了两大单语语料库的扩容外,近年来CCL语料库还融入了一些专题语料库,例如:早期北京话材料、留学生汉语作文语料、汉语构式语料库、中文学术文献语料库、海外华文网络语料等等。
http://ccl.pku.edu.cn:8080/ccl_corpus/index/jsp?=xiandai
05. 人民日报标注语料库
该语料库是我国第一个大型的现代汉语标注语料库,以《人民日报》1998年的纯文本语料为基础,完成词语切分、词性标注、专有名词标注、语素子类标注、动词和形容词特殊用法标注、短语型标注等加工工作,现已扩充至3500万字的规模。后来北京大学计算语言学研究所在此基础上完成了另外100万字语料的词语切分、词性标注和汉语拼音标注的加工任务,还利用所研制的《现代汉语语义词典》、参照《现代汉语词典》,根据语料实际使用情况对词义描写进行调整,研发了一个大规模、高质量的现代汉语词义标注语料库(Chinese Word Sense Tagging Corpus,STC)。
为了弥补北京大学人民日报语料库用于处理当前文本时的不足,2019年开始南京农业大学人文与社会计算研究中心以2015年至2018年《人民日报》发表的文章为对象,构建了新时代人民日报语料库(简称NEPD, http://corpus.njau.edu.cn/),目前该语料库涵盖了《人民日报》2015 年1-5 月、2016年1月、2017年1月、2018 年1月共9个月的分词语料,并且后续将不断补充最新语料 。
06. 清华汉语树库
(TshinghuaChineseTreebank,TCT )
该语料库从包含文学、学术、新闻、应用四大体裁的200万汉字平衡语料库中提取了100万汉字规模的语料文本,经过自动断句、句法分析后再进行人工校对,形成了有完整句法结构树的汉语句法树库语料。
Project Gutenberg http://www.gutenberg.org/
Library Genesis http://gen.lib.rus.ec/
Planet eBook http://www.planetebook.com/
E-bookee http://ebookee.org/
Read Easily http://www.readeasily.com/
Bookfi http://en.bookfi.org/
Wikibooks http://en.wikibooks.org/wiki/Main_Page
The Online Books Page http://onlinebooks.library.upenn.edu/
Get Free e-Books http://www.getfreeebooks.com/
BookYards http://www.bookyards.com/en/welcome
文章来源|语言科学
500部高含金量纪录片珍藏版:含BBC纪录片+历史+科普+艺术+39年春晚 如果能洞察这篇讲话深得民心的5个关键点,你就已是5%的人! 读懂此公报,何愁选题少?2020年全国教育事业发展统计公报发布! 盘点网络交流中最让人不舒服的那些事儿 1.8万人聆听讲座:初入职场的那些馅饼和陷阱:从怎么看到怎么办 哈佛大学:一个人碌碌无为的九大根源!您符合几条? 儒林外史学术江湖密函:黑旋风兵陷学术路,及时雨定计点迷津 自寻烦恼、自暴其丑和自毁长城的“36计” 不是所有的陪伴都是正能量!家长好好学习,孩子天天向上! 因为专业,所以信赖:院长毕业典礼致辞全是职场大实话 闭幕式院长致辞:把能说的说清楚,对不能说的保持沉默 毛浩然教授全校研究生开学典礼致辞:五加二,白加黑 2020年毛浩然院长新生致辞:苔花如米小,也学牡丹开 2019年院长新生致辞:虚心使人进步,心虚使人更进步 华侨大学外国语学院2018年院长新生致辞:不忘初心,DELETE前行 华侨大学外国语学院2017级迎新大会院长致辞 华侨大学外国语学院新生开学典礼院长致辞 54121是个什么梗?外国语学院干部换届大会院长即兴发言 感应、前行、暂停:毕业联欢会上的院长寄语 三回归、三减法、三加法:新生家长见面会院长致辞 望闻问切,聚焦就业 | 石大外院“院长见面会”难题巧解妙答 难还是懒?不难岂有含金量?CATTI说明会特邀嘉宾毛浩然院长致辞 答疑解惑千万里,总有一款适合你:院长线上见面会问答实录 求同存异,精彩叙事,抢占先机:族谱编修茶话会院长致辞 21个好习惯,坚持21天,尝到甜头的感觉是会上瘾的! 应对压力的4种模式和11条建议!停一停没关系的,别太累! 尝试欢乐答疑,怼死强词夺理:你能否一招制敌又不失得体 一件接一件地高效做事?开心就好?谜底揭晓! 牙医送孩子上大学的奇葩场景,大多数人经历过,您呢? 教师有多用心就能有多开心:识变、应变与求变 诤友开炮,好友补刀:为什么我不太适合当院长? 警钟 | 改革深水区谨防“假摸石头不过河” 中国元素与世界关注 | 助推中国当代学术走出去的要素 你领略过几处?黄渤:多少梦想从这里出发,他又拥抱过多少游子的归来! 2021年世界摄影奖震憾作品:将技巧、命名和配文一起学会!